package pwd.allen.imports.easyexcel;

import com.alibaba.excel.context.AnalysisContext;
import com.alibaba.excel.event.AnalysisEventListener;
import lombok.extern.slf4j.Slf4j;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;

import java.util.ArrayList;
import java.util.List;
import java.util.function.BiConsumer;

/**
 * 自定义数据监听器：分批读取数据
 *
 * @author 门那粒沙
 * @create 2020-05-19 22:57
 **/
@Slf4j
public class ListDataListener<T> extends AnalysisEventListener<T> {

    /**
     * 每隔batch_count条存储数据库，实际使用中可以3000条，然后清理list ，方便内存回收
     */
    private int batch_count = 1000;
    /**
     * 存一批数据，因为list不共享，所以每次监听数据都要新建一个新的ListDataListener
     */
    private List<T> list = null;
    private BiConsumer<List<T>, AnalysisContext> consumer;

    public ListDataListener(int batch_count, BiConsumer<List<T>, AnalysisContext> consumer) {
        this.batch_count = batch_count;
        this.list = new ArrayList<>(batch_count);
        this.consumer = consumer;
    }

    /**
     * 这个每一条数据解析都会来调用
     * @param data
     * @param context
     */
    @Override
    public void invoke(T data, AnalysisContext context) {
        list.add(data);
        // 达到BATCH_COUNT了，需要去存储一次数据库，防止数据几万条数据在内存，容易OOM
        if (list.size() >= batch_count) {
            consumer.accept(list, context);
            // 完成后清理 list
            list.clear();
        }
    }

    /**
     * 所有数据解析完成了 都会来调用
     * @param context
     */
    @Override
    public void doAfterAllAnalysed(AnalysisContext context) {
        consumer.accept(list, context);
    }
}
